Chatbot Arena

Chatbot ArenaはLLMのベンチマークプラットフォームで、ユーザーはランダムに選択された2つのモデルに対してプロンプトを入力し、どのLLMが回答しているか明かされない状態で、どちらが優れているかを選択するようになっている。

ユーザーが優れていると判断した方を選択すると、出力を生成するためにどのLLMが使われたかが表示される。